Evaluation modulaire d'un système de questions-réponses sur un corpus de questions semi-spontanées
نویسندگان
چکیده
RÉSUMÉ. Cet article présente une évaluation séquentielle du système de questions-réponses modulaire et stochastique SQuALIA. L’évaluation se fonde sur un corpus de question semispontanées obtenu en faisant poser 20 questions de référence à des adultes francophones, non francophones ou dyslexiques. Les expériences montrent que ce sont les fautes d’orthographe qui ont le plus d’impact sur les modules d’analyse. En moyenne le système parvient à ne trouver des réponses qu’à 60% des questions posées, ce qui conduit à imaginer l’intégration d’un correcteur orthographique en amont des systèmes, plus de souplesse dans l’analyse, et la conservation de l’incertitude tout au long du processus en le formalisant à l’aide d’un modèle probabiliste.
منابع مشابه
D'une compacité positionnelle à une compacité probabiliste pour un système de Questions / Réponses
RÉSUMÉ. Dans cet article, nous présentons une discussion sur la définition d'un score de compacité pour permettre l'extraction d'une réponse dans un système de Questions/Réponses. Ce score de compacité qui peut être succinctement décrit comme une fonction liée a la densité des termes de la question dans le voisinage d'une réponse candidate, est présenté en détail. Ensuite, une discussion nous a...
متن کاملClassification de questions par traduction
RÉSUMÉ. Dans cet article, nous nous intéressons à la classification de questions pour un système de questions-réponses en français. Faisant le constat d’un manque de corpus annoté en français, nous nous interrogeons sur la possibilité d’exploiter les corpus anglais existants, en utilisant des traducteurs automatiques. Nous avons mené une série d’expériences en faisant varier le sens de traducti...
متن کاملGénération et enrichissement automatique de listes de patrons de phrases pour les moteurs de questions-réponses
Résumé. Nous utilisons un algorithme d'amorce mutuelle (Riloff et Jones 99), entre des couples de termes d'une relation et des patrons de phrase. À partir de couples d'amorce, le système génère des listes de patrons qui sont ensuite enrichies de façon semi-supervisée, puis utilisées pour trouver de nouveaux couples. Ces couples sont à leur tour réutilisés pour générer, par itérations successive...
متن کاملUtilisation de la syntaxe pour valider les réponses à des questions par plusieurs documents
RÉSUMÉ. Cet article présente FIDJI, un système de questions-réponses pour le français, combinant des informations syntaxiques sur la question et les documents avec des techniques plus traditionnelles du domaine, telles que la reconnaissance des entités nommées et la pondération des termes. Notamment, nous expérimentons dans ce système la validation des réponses dans plusieurs documents, ainsi q...
متن کاملGénération de réponses pour un système de questions-réponses
RÉSUMÉ. Les systèmes de questions-réponses (SQR) actuels répondent à une question posée par l’utilisateur en langue naturelle par une information précise ainsi qu’un passage de document justifiant cette information. Le principal défaut de ces réponses est qu’elles ne créent pas d’interaction avec l’utilisateur, ce qui peut être problématique, en particulier dans le cas où le SQR est intégré dan...
متن کامل